• 专利附录
  • 专利说明
  • 权利要求
  • 类似技术
  • 同族专利
  • 引用文献
  • 法律状态
  • 优先权
    • 专利摘要:
    本实用新型公开了一种多功能交互终端，该多功能交互终端包括中央控制器、触摸显示屏、声音采集模块、扬声器及人体检测模块。人体检测模块检测人体与多功能触屏交互终端的距离；中央控制器在人体与多功能触屏交互终端的距离小于预设距离时，控制触摸显示屏显示主功能界面；扬声器根据中央控制器的控制播放预设欢迎语；声音采集模块采集语音指令；触摸显示屏基于接收到的用户点击操作或声音采集模块采集到的语音指令，根据中央控制器的控制显示相应的服务界面。本实用新型融合触摸显示屏、声音采集模块、扬声器及人体检测模块多模态传感设备，充分调动用户触觉、听觉及听觉，在降低成本的同时提高交互效果。
    公开号:CN214335699U
    申请号:CN202120553174.6U
    申请日:2021-03-17
    公开日:2021-10-01
    发明作者:唐瑭；李驰；刘岩
    申请人:Taikang Insurance Group Co Ltd；
    IPC主号:G06F3-0488
    专利说明:
    [n0001] 本实用新型涉及智能交互技术领域，尤其涉及多功能交互终端。
    [n0002] 本部分旨在为权利要求书中陈述的本实用新型实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
    [n0003] 现有自助服务终端主要使用键盘或者触摸屏作为输入装置，少部分自助服务终端配备了具有人脸识别功能摄像头用来识别用户身份，可实现一定程度的个性化服务功能。但自助服务终端互动方式单一，以键盘输入或者触屏点击为主，影响了整体的交互效果。而多功能智能服务机器人硬件成本较高，主要设计目的为执行可移动的服务任务。
    [n0004] 因此，现有的服务终端存在成本高且交互效果差的问题。
    [n0005] 本实用新型实施例提供一种多功能交互终端，用以在降低成本的同时提高交互效果，该多功能交互终端包括：
    [n0006] 中央控制器、触摸显示屏、声音采集模块、扬声器及人体检测模块；
    [n0007] 触摸显示屏、声音采集模块、扬声器及人体检测模块均分别连接中央控制器；
    [n0008] 人体检测模块，用于检测人体与多功能触屏交互终端的距离；
    [n0009] 中央控制器，用于在人体检测模块检测到人体与多功能触屏交互终端的距离小于预设距离时，控制触摸显示屏显示主功能界面；
    [n0010] 扬声器，用于在人体检测模块检测到人体与多功能触屏交互终端的距离小于预设距离时，根据中央控制器的控制播放预设欢迎语；
    [n0011] 声音采集模块，用于采集语音指令；
    [n0012] 触摸显示屏，用于基于接收到的用户点击操作或声音采集模块采集到的语音指令，根据中央控制器的控制显示相应的服务界面。
    [n0013] 在本实用新型的一实施例中，中央控制器还用于在人体检测模块检测到人体与多功能触屏交互终端的距离不小于预设距离时，控制触摸显示屏显示待机界面。
    [n0014] 在本实用新型的一实施例中，还包括人脸图像获取模块及服务器；人脸图像获取模块及服务器均连接中央控制器；
    [n0015] 人脸图像获取，用于将获取的用户人脸图像通过中央控制器发送至服务器；
    [n0016] 服务器，用于将接收的用户人脸图像与人脸图像数据库进行比对，在用户身份识别通过时将用户信息反馈至中央控制器；
    [n0017] 扬声器，用于在用户身份识别通过时，根据中央控制器的控制播放定制问候语；还用于在用户身份识别未通过时，根据中央控制器的控制播放预设标准问候语。
    [n0018] 在本实用新型的一实施例中，触摸显示屏，还用于在用户身份识别通过后，基于接收到的用户预约服务指令，根据中央控制器的控制跳转并显示相应的服务界面；
    [n0019] 扬声器，还用于在用户完成预约服务后，根据中央控制器的控制播放预约服务结果。
    [n0020] 在本实用新型的一实施例中，人脸图像获取模块至少包括RGB摄像头。
    [n0021] 在本实用新型的一实施例中，中央控制器，还用于在通过声音采集模块采集到语音唤醒词后，控制声音采集模块采集语音信息；
    [n0022] 声音采集模块，还用于通过中央控制器将采集到的语音信息发送至服务器；
    [n0023] 服务器，还用于对接收到的语音信息进行语音识别，将语音识别结果反馈至中央控制器；
    [n0024] 中央控制器，还用于根据服务器反馈的语音识别结果控制触摸显示屏显示相应界面，控制扬声器播放语音反馈结果。
    [n0025] 在本实用新型的一实施例中，人体检测模块至少包括景深摄像头，中央控制器至少包括信息采集单元及信息处理单元；
    [n0026] 信息采集单元，用于接收人体检测模块获取的用户深度图像；
    [n0027] 信息处理单元，用于识别信息采集单元接收的用户深度图像与多功能触屏交互终端的距离；
    [n0028] 中央控制器，用于在信息处理单元识别到用户深度图像与多功能触屏交互终端的距离小于预设距离时，控制触摸显示屏显示主功能界面。
    [n0029] 在本实用新型的一实施例中，还包括与中央控制器连接的定时器；
    [n0030] 定时器，用于在人体检测模块检测到人体与多功能触屏交互终端的距离小于预设距离且触摸显示屏显示主功能界面时，根据中央控制器的控制开始计时；
    [n0031] 中央控制器，还用于在定时器计时超过预设时间长度后控制扬声器播放预设语音。
    [n0032] 在本实用新型的一实施例中，还包括开关机模块，
    [n0033] 开关机模块，用于在接收到开机指令后，中央控制器控制触摸显示屏显示待机界面；还用于在接收到关机指令后，中央控制器控制触摸显示屏显示关机界面，以控制多功能触屏交互终端关机。
    [n0034] 在本实用新型的一实施例中，声音采集模块至少包括麦克风阵列，触摸显示屏至少包括触摸屏和显示屏。
    [n0035] 本实用新型实施例中，中央控制器、触摸显示屏、声音采集模块、扬声器及人体检测模块；触摸显示屏、声音采集模块、扬声器及人体检测模块均分别连接中央控制器。人体检测模块检测人体与多功能触屏交互终端的距离；中央控制器在人体检测模块检测到人体与多功能触屏交互终端的距离小于预设距离时，控制触摸显示屏显示主功能界面；扬声器在人体检测模块检测到人体与多功能触屏交互终端的距离小于预设距离时，根据中央控制器的控制播放预设欢迎语；声音采集模块采集语音指令；触摸显示屏基于接收到的用户点击操作或声音采集模块采集到的语音指令，根据中央控制器的控制显示相应的服务界面。本实用新型实施例融合触摸显示屏、声音采集模块、扬声器及人体检测模块多模态传感设备，充分调动用户触觉、听觉及听觉，在降低成本的同时提高交互效果。
    [n0036] 为了更清楚地说明本实用新型实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本实用新型的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
    [n0037] 图1为本实用新型实施例提供的多功能触屏交互终端的模块结构示意图；
    [n0038] 图2为本实用新型实施例提供的待机界面/主界面切换逻辑示意图；
    [n0039] 图3为本实用新型实施例提供的多功能触屏交互终端的另一模块结构示意图；
    [n0040] 图4为本实用新型实施例提供的人脸识别逻辑示意图；
    [n0041] 图5为本实用新型实施例提供的语音识别逻辑示意图。
    [n0042] 为使本实用新型实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本实用新型实施例做进一步详细说明。在此，本实用新型的示意性实施例及其说明用于解释本实用新型，但并不作为对本实用新型的限定。
    [n0043] 图1示出了本实用新型实施例提供的多功能触屏交互终端的模块结构，为便于描述，仅示出了与本实用新型实施例相关的部分，详述如下：
    [n0044] 如图1所示，多功能触屏交互终端，其包括：
    [n0045] 中央控制器101、触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105，触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105均分别连接中央控制器101；
    [n0046] 人体检测模块105，用于检测人体与多功能交互终端的距离。
    [n0047] 中央控制器101，用于在人体检测模块105检测到人体与多功能交互终端的距离小于预设距离时，控制触摸显示屏102显示主功能界面。
    [n0048] 扬声器104，用于在人体检测模块105检测到人体与多功能交互终端的距离小于预设距离时，根据中央控制器101的控制播放预设欢迎语。其中，该预设欢迎语例如可以是“贵宾上午好”、“贵宾早上好”等。
    [n0049] 声音采集模块103，用于采集语音指令。
    [n0050] 触摸显示屏102，用于基于接收到的用户点击操作或声音采集模块103采集到的语音指令，根据中央控制器101的控制显示相应的服务界面。
    [n0051] 声音采集模块103至少包括麦克风阵列，触摸显示屏102至少包括触摸屏和显示屏。其中，预设距离为预先设定的距离，本领域技术人员可以根据实际情况和具体需求预先设定该预设距离。例如，预先设定该预设距离为3米，或者预先设定该预设距离为5米，本领域技术人员可以理解的是，还可以预先设定该预设距离为除上述3米及5米之外的其他距离，例如2米，本实用新型实施例对此不作特别的限制。
    [n0052] 多功能触屏交互终端开机后进入待机状态，中央控制器101控制触摸显示屏102显示待机界面，使用文字和动画吸引过往用户，当人体检测模块105检测到有用户靠近时，中央控制器101控制触摸显示屏102跳转至功能主界面。用户通过触摸显示屏102点击相应的服务模块，触摸显示屏102显示相应的服务界面；用户还可以通过声音采集模块103说出相应服务模块的语音指令(例如导航词)，中央控制器101基于语音指令控制触摸显示屏102显示相应的服务界面；用户在服务模块内可以使用触摸显示屏102或者声音采集模块103进行命令输入，操作结果通过扬声器104进行语音提示或播报，触摸显示屏102根据操作进行界面跳转，完成服务的查询或预约。
    [n0053] 在本实用新型的一实施例中，人体检测模块105至少包括景深摄像头，中央控制器101至少包括信息采集单元及信息处理单元。其中，中央控制器101还包括信息通讯单元。
    [n0054] 信息采集单元，用于接收人体检测模块105获取的用户深度图像。
    [n0055] 信息处理单元，用于识别信息采集单元接收的用户深度图像与多功能交互终端的距离。
    [n0056] 中央控制器101，用于在信息处理单元识别到用户深度图像与多功能交互终端的距离小于预设距离时，控制触摸显示屏102显示主功能界面。
    [n0057] 触摸显示屏102和人体检测模块105与中央控制器101相连，通过其中的信息采集单元收集收集人体检测模块105返回的深度图像，在信息处理单元中使用智能算法分析识别出人体骨骼结构的位置，进一步计算人体与自助服务终端间的距离，如果距离≤2米，中央控制器101控制触摸显示屏102跳转至功能主页面。
    [n0058] 在本实用新型的一实施例中，图2示出了本实用新型实施例提供的待机界面/主界面切换逻辑示意，如图1及图2所示，中央控制器101还用于在人体检测模块105检测到人体与多功能交互终端的距离不小于预设距离时，控制触摸显示屏102显示待机界面。
    [n0059] 当人体检测模块105检测到人体与多功能交互终端的距离不小于预设距离时，认为用户已离开，此时中央控制器101控制触摸显示屏102显示待机界面。
    [n0060] 在本实用新型实施例中，中央控制器101、触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105；触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105均分别连接中央控制器101。人体检测模块105检测人体与多功能触屏交互终端的距离；中央控制器101在人体检测模块105检测到人体与多功能触屏交互终端的距离小于预设距离时，控制触摸显示屏102显示主功能界面；扬声器104在人体检测模块105检测到人体与多功能触屏交互终端的距离小于预设距离时，根据中央控制器101的控制播放预设欢迎语；声音采集模块103采集语音指令；触摸显示屏102基于接收到的用户点击操作或声音采集模块103采集到的语音指令，根据中央控制器101的控制显示相应的服务界面。本实用新型实施例融合触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105多模态传感设备，充分调动用户触觉、听觉及听觉，在降低成本的同时提高交互效果。
    [n0061] 图3示出了本实用新型实施例提供的多功能触屏交互终端的另一模块结构，图4示出了本实用新型实施例提供的人脸识别逻辑示意，为便于描述，仅示出了与本实用新型实施例相关的部分，详述如下：
    [n0062] 在本实用新型的一实施例中，如图3及图4所示，在上述图1所示模块结构的基础上，多功能触屏交互终端，还包括：
    [n0063] 人脸图像获取模块301及服务器302；人脸图像获取模块301及服务器302均连接中央控制器101；
    [n0064] 人脸图像获取，用于将获取的用户人脸图像通过中央控制器101发送至服务器302；
    [n0065] 服务器302，用于将接收的用户人脸图像与人脸图像数据库进行比对，在用户身份识别通过时将用户信息反馈至中央控制器101；
    [n0066] 扬声器104，用于在用户身份识别通过时，根据中央控制器101的控制播放定制问候语；还用于在用户身份识别未通过时，根据中央控制器101的控制播放预设标准问候语。
    [n0067] 人脸图像获取模块301至少包括RGB摄像头，服务器302包括物理服务器及云服务器。其中，该预设标准问候语例如可以是“张大爷，上午好，请您开始与我互动”；该预设标准问候语例如可以是“贵宾上午好，请您开始与我互动”等。用户信息包括用户身份信息及用户历史使用习惯信息等。
    [n0068] 在本实用新型的一实施例中，触摸显示屏102，还用于在用户身份识别通过后，基于接收到的用户预约服务指令，根据中央控制器101的控制跳转并显示相应的服务界面；
    [n0069] 扬声器104，还用于在用户完成预约服务后，根据中央控制器101的控制播放预约服务结果。
    [n0070] 在本实用新型的一实施例中，图5示出了本实用新型实施例提供的语音识别逻辑示意，如图3及图5所示，中央控制器101，还用于在通过声音采集模块103采集到语音唤醒词后，控制声音采集模块103采集语音信息；
    [n0071] 声音采集模块103，还用于通过中央控制器101将采集到的语音信息发送至服务器302；
    [n0072] 服务器302，还用于对接收到的语音信息进行语音识别，将语音识别结果反馈至中央控制器101；
    [n0073] 中央控制器101，还用于根据服务器302反馈的语音识别结果控制触摸显示屏102显示相应界面，控制扬声器104播放语音反馈结果。
    [n0074] 在上述触摸显示屏102进入交互主界面后，中央控制器101同时接收触摸显示屏102和声音采集模块103的输入信息：当中央控制器101接收到语音唤醒词后，控制声音采集模块103开始采集语音信息，语音信息经过中央控制器101传送至服务器302，利用自然语言处理进行语音识别，返回语音识别结果至中央控制器101。中央控制器101根据语音识别结果控制扬声器104播放语音反馈结果，控制触摸显示屏102进行功能跳转或者显示提示信息。
    [n0075] 在本实用新型的一实施例中，如图3所示，在上述模块结构的基础上，多功能触屏交互终端还包括与中央控制器101连接的定时器303。
    [n0076] 定时器303，用于在人体检测模块105检测到人体与多功能交互终端的距离小于预设距离且触摸显示屏102显示主功能界面时，根据中央控制器101的控制开始计时；
    [n0077] 中央控制器101，还用于在定时器303计时超过预设时间长度后控制扬声器104播放预设语音。
    [n0078] 定时器303计时超过预设时间长度，说明用户在多功能交互终端跟前但长时间未操作，故此时中央控制器101控制扬声器104播放预设语音，以提醒用户及时进行操作。其中，该预设时间长度为预先设定的时间长度，本领域技术人员可以根据实际情况和具体需求预先设定该预设时间长度。例如，预先设定该预设时间长度为1分钟，或者预先设定该预设时间长度为3分钟，本领域技术人员可以理解的是，还可以预先设定该预设时间长度为除上述1分钟及3分钟之外的其他时间长度，例如2分钟，本实用新型实施例对此不作特别的限制。
    [n0079] 在本实用新型的一实施例中，在上述模块结构的基础上，多功能触屏交互终端还包括开关机模块。
    [n0080] 开关机模块，用于在接收到开机指令后，中央控制器101控制触摸显示屏102显示待机界面；还用于在接收到关机指令后，中央控制器101控制触摸显示屏102显示关机界面，以控制多功能交互终端关机。
    [n0081] 本实用新型实施例提供的多功能交互终端可以放置在长寿社区的公共空间内，为社区居民提供自助服务。其服务内容包括：社区服务5项：班车预约、外出登记、课程活动、美食天地和社区新闻；健康服务3项：中医体测、心率检测和慢病介绍；通用服务1项：天气预报。以上介绍的服务分为三种，预约服务、信息查询服务和健康检测服务。预约服务和健康检测服务，在养老社区内普遍采用人工预约服务为主，每天会占用社区大量人力资源；另外一方面信息查询服务，涉及居民个人健康、日常的起居和在社区内的生活，该查询服务可以增加居民的知识面并增加居民与社区之间的粘度。
    [n0082] 本实用新型实施例提供的多功能交互终端包括多种人机交互传感设备，例如景深摄像头、麦克风阵列，多种交互设备相互配合，可实现人机视觉、听觉和触觉的全方位交互，符合居民日常沟通习惯，为居民提供无感式交互体验。本实用新型融合了多种智能技术，可以引导居民顺利完成交互流程，真正的完成预约服务，为长寿社区节约了劳动力成本。
    [n0083] 本实用新型实施例提供的多功能交互终端可以在长寿社区拓展社区服务的新形态：自助性服务，增加居民参与社区活动的频次，加强居民与社区的粘性，助力社区开展健康管理，节约社区人力成本投入。通过无感式交互体验，引导居民进行高频次的互动，增加居民的满意度。本实用新型实施例提供的多功能交互终端可以同时为自助服务终端、机器人、医疗健康IoT和安防IoT设备提供后台支持；可以覆盖商场、写字楼、博物馆、医院和长寿社区等公共场所，其后台服务还可以用于居家的IoT设备和机器人产品上。
    [n0084] 以下以长寿社区居民预约班车任务为例，简要说明本实用新型提供的多功能交互终端的工作原理：
    [n0085] 多功能交互终端开机后触摸显示屏102显示待机界面，在待机界面上会循环轮播系统广告，介绍设备可以完成的服务功能，吸引用户上前进行互动。
    [n0086] 用户走近触摸显示屏102后，景深摄像头会采集深度图像传输至中央控制器101，通过智能分析算法识别到有人走近，并识别到用户相对于大屏的位置，如偏左、偏右，过近或者过远。接着RGB摄像头采集图像传送至中央控制器101并进一步在云端服务器302上进行人脸识别用户身份，然后返回识别结果。
    [n0087] 当识别出用户身份时，中央控制器101控制扬声器104播放定制问候语，并提示用户调整交互位置，如：“张大爷，上午好，今天大风，出门请注意增添衣物，请您往中间移动并离我近一点，然后开始与我互动”当未能识别出用户身份时，中央控制器101控制扬声器104播放标准问候语，并提示用户调整交互位置，如：“贵宾上午好，今天大风，出门请注意增添衣物，请您往中间移动并离我近一点，然后开始与我互动。”
    [n0088] 此时触摸显示屏102切换至功能主界面，中央控制器101开启定时器303，如果在规定时间内用户在多功能交互终端前没有做出任何操作，中央控制器101触发扬声器104提示用户与多功能交互终端进行交互。用户喊出唤醒词“小泰小泰”，麦克风阵列被唤醒并开始音频信号采集，音频信号通过中央控制器101连接云端服务器302，对语音进行识别后将识别结果返回，当识别出导航词“班车预约”时，中央控制器101控制程序进入预约班车功能模块；用户也可以点击触摸显示屏102上的“班车预约”按钮，中央控制器101收到命令，控制进入班车预约模块。
    [n0089] 进入班车预约模块后，中央控制器101开启定时器303，控制触摸显示屏102显示班车时刻表界面。如果用户一直没有任何操作，导致定时器303超时，中央控制器101将控制触摸显示屏102返回交互主界面。
    [n0090] 用户在班车时刻表内点击触摸显示屏102选定班车车次以及目的地，中央控制器101记录相应信息，并控制触摸显示屏102跳转至人脸识别界面，RGB摄像头采集人脸图像会传至中央控制器101，通过和云端服务器302上人脸库进行比对，如未能识别出用户身份，扬声器104语音提示识别用户身份失败，触摸显示屏102跳转至班车时刻表界面；如果识别出用户身份，触摸显示屏102跳转至详细信息输入界面。用户可通过触摸显示屏102填写乘坐班车的详细信息，如跟车去、跟车回、陪同人员信息等，完成预约操作；用户也可通过语音唤醒词，唤醒麦克风阵列，中央控制器101利用云端服务器302语音识别功能，填写完成详细乘车信息，并进一步完成预约操作。预约成功后，中央控制器101控制扬声器104提示用户班车预约成功，并播报班车车次和时间，提醒用户按时乘车；然后控制触摸显示屏102返回交互主界面。用户可以在交互主界面上选择其他服务模块进行交互。
    [n0091] 景深摄像头实时将景深图像回传至中央控制器101，当识别到用户已经离开后，中央控制器101控制触摸显示屏102返回待机界面，等待下一次的人机互动
    [n0092] 本实用新型的应用场景：长寿社区的公共空间，为社区居民提供自助式信息查询和预约服务。未来本实用新型可以拓展到办公职场、医院、保险服务大厅、和博物馆等多种公共场所。
    [n0093] 综上所述，本实用新型实施例中，中央控制器101、触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105；触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105均分别连接中央控制器101。人体检测模块105检测人体与多功能触屏交互终端的距离；中央控制器101在人体检测模块105检测到人体与多功能触屏交互终端的距离小于预设距离时，控制触摸显示屏102显示主功能界面；扬声器104在人体检测模块105检测到人体与多功能触屏交互终端的距离小于预设距离时，根据中央控制器101的控制播放预设欢迎语；声音采集模块103采集语音指令；触摸显示屏102基于接收到的用户点击操作或声音采集模块103采集到的语音指令，根据中央控制器101的控制显示相应的服务界面。本实用新型实施例融合触摸显示屏102、声音采集模块103、扬声器104及人体检测模块105多模态传感设备，充分调动用户触觉、听觉及听觉，在降低成本的同时提高交互效果。
    [n0094] 以上所述的具体实施例，对本实用新型的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本实用新型的具体实施例而已，并不用于限定本实用新型的保护范围，凡在本实用新型的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本实用新型的保护范围之内。
    权利要求:
    Claims (10)
    [0001] 1.一种多功能交互终端，其特征在于，包括：
    中央控制器、触摸显示屏、声音采集模块、扬声器及人体检测模块；
    触摸显示屏、声音采集模块、扬声器及人体检测模块均分别连接中央控制器；
    人体检测模块，用于检测人体与多功能交互终端的距离；
    中央控制器，用于在人体检测模块检测到人体与多功能交互终端的距离小于预设距离时，控制触摸显示屏显示主功能界面；
    扬声器，用于在人体检测模块检测到人体与多功能交互终端的距离小于预设距离时，根据中央控制器的控制播放预设欢迎语；
    声音采集模块，用于采集语音指令；
    触摸显示屏，用于基于接收到的用户点击操作或声音采集模块采集到的语音指令，根据中央控制器的控制显示相应的服务界面。
    [0002] 2.如权利要求1所述的多功能交互终端，其特征在于，中央控制器还用于在人体检测模块检测到人体与多功能交互终端的距离不小于预设距离时，控制触摸显示屏显示待机界面。
    [0003] 3.如权利要求1所述的多功能交互终端，其特征在于，还包括人脸图像获取模块及服务器；人脸图像获取模块及服务器均连接中央控制器；
    人脸图像获取，用于将获取的用户人脸图像通过中央控制器发送至服务器；
    服务器，用于将接收的用户人脸图像与人脸图像数据库进行比对，在用户身份识别通过时将用户信息反馈至中央控制器；
    扬声器，用于在用户身份识别通过时，根据中央控制器的控制播放定制问候语；还用于在用户身份识别未通过时，根据中央控制器的控制播放预设标准问候语。
    [0004] 4.如权利要求3所述的多功能交互终端，其特征在于，触摸显示屏，还用于在用户身份识别通过后，基于接收到的用户预约服务指令，根据中央控制器的控制跳转并显示相应的服务界面；
    扬声器，还用于在用户完成预约服务后，根据中央控制器的控制播放预约服务结果。
    [0005] 5.如权利要求3所述的多功能交互终端，其特征在于，人脸图像获取模块至少包括RGB摄像头。
    [0006] 6.如权利要求3所述的多功能交互终端，其特征在于，中央控制器，还用于在通过声音采集模块采集到语音唤醒词后，控制声音采集模块采集语音信息；
    声音采集模块，还用于通过中央控制器将采集到的语音信息发送至服务器；
    服务器，还用于对接收到的语音信息进行语音识别，将语音识别结果反馈至中央控制器；
    中央控制器，还用于根据服务器反馈的语音识别结果控制触摸显示屏显示相应界面，控制扬声器播放语音反馈结果。
    [0007] 7.如权利要求1所述的多功能交互终端，其特征在于，人体检测模块至少包括景深摄像头，中央控制器至少包括信息采集单元及信息处理单元；
    信息采集单元，用于接收人体检测模块获取的用户深度图像；
    信息处理单元，用于识别信息采集单元接收的用户深度图像与多功能交互终端的距离；
    中央控制器，用于在信息处理单元识别到用户深度图像与多功能交互终端的距离小于预设距离时，控制触摸显示屏显示主功能界面。
    [0008] 8.如权利要求1所述的多功能交互终端，其特征在于，还包括与中央控制器连接的定时器；
    定时器，用于在人体检测模块检测到人体与多功能交互终端的距离小于预设距离且触摸显示屏显示主功能界面时，根据中央控制器的控制开始计时；
    中央控制器，还用于在定时器计时超过预设时间长度后控制扬声器播放预设语音。
    [0009] 9.如权利要求1所述的多功能交互终端，其特征在于，还包括开关机模块，
    开关机模块，用于在接收到开机指令后，中央控制器控制触摸显示屏显示待机界面；还用于在接收到关机指令后，中央控制器控制触摸显示屏显示关机界面，以控制多功能交互终端关机。
    [0010] 10.如权利要求1所述的多功能交互终端，其特征在于，声音采集模块至少包括麦克风阵列，触摸显示屏至少包括触摸屏和显示屏。
    类似技术:
    公开号 | 公开日 | 专利标题
    CN106343833B|2018-01-30|一种智能镜子
    CN105320404A|2016-02-10|用于执行功能的设备和方法
    CN105094133A|2015-11-25|一种基于多功能智能电子药箱的健康服务机器人
    US20120234631A1|2012-09-20|Simple node transportation system and control method thereof
    CN103529762A|2014-01-22|一种基于传感器技术的智能家居控制方法及系统
    CN204945795U|2016-01-06|一种基于多功能智能电子药箱的健康服务机器人
    EP3343936A2|2018-07-04|Smart electronic device
    CN202771369U|2013-03-06|基于多处理器的人机界面装置
    CN109447232A|2019-03-08|机器人主动问询方法、装置、电子设备及存储介质
    US20140049697A1|2014-02-20|Television device and method for displaying virtual on-screen interactive moderator
    CN214335699U|2021-10-01|多功能交互终端
    CN205490994U|2016-08-17|一种多功能智能音响
    CN205438581U|2016-08-10|美容服务机器人
    CN103645690A|2014-03-19|一种语音控制数字家庭智能盒的方法
    WO2020135334A1|2020-07-02|电视应用主题切换方法、电视、可读存储介质及设备
    Vergnes et al.2005|Interactive assistant for activities of daily living
    CN104320710A|2015-01-28|一种针对不同用户群定制的专属交互系统和交互方法
    CN106997449A|2017-08-01|具有人脸识别功能的机器人和人脸识别方法
    CN209453563U|2019-10-01|一种智能机器人
    CN111573445A|2020-08-25|一种电梯无接触式人机交互系统
    Tondewad et al.2019|Smart Mirror Based on Raspberry Pi
    CN110822641A|2020-02-21|空调器及其控制方法、装置和可读存储介质
    CN103177373A|2013-06-26|一种互动商用体验方法及系统
    CN211466402U|2020-09-11|服务机器人
    CN109978244A|2019-07-05|一种可智能交互的室内导引机器人系统
    同族专利:
    公开号 | 公开日
    引用文献:
    公开号 | 申请日 | 公开日 | 申请人 | 专利标题
    法律状态:
    2021-10-01| GR01| Patent grant|
    2021-10-01| GR01| Patent grant|
    优先权:
    申请号 | 申请日 | 专利标题
    CN202120553174.6U|CN214335699U|2021-03-17|2021-03-17|多功能交互终端|CN202120553174.6U| CN214335699U|2021-03-17|2021-03-17|多功能交互终端|
    [返回顶部]